SCOUT: Supply-Aware Cold-Start Proactive Query Suggestion for Travel Search
供给感知的旅行搜索冷启动主动查询建议框架 SCOUT
🧭 生成式 Query 建议 · 供给感知 RL ★ 深度解读
Airbnb, Inc.
用搜索重排分作免费 RL 奖励,GRPO 把供给感知压进 LLM,零推理成本追平 best-of-8
📌 工作参考价值(4 点)
- 可直接复用「用生产重排器 query-listing 匹配分作为 RL 奖励」:相比在线跑 best-of-N 或 LLM judge,重排分在 serving 路径本来就会算,奖励零额外推理;电商搜索/推荐可把现有 ranking model 的 relevance score 拆出来当密集奖励,降低训练成本。
- 冷启动无点击日志时,可用历史结构化请求(目的地/日期/人群等筛选条件)作为 context 主动生成 query,并用当前 catalog 检索 top K 后做离线 inventory/diversity 评估;这对新入口、新场景的无样本 bootstrapping 很实用。
- 若用 DPO 做生成式 query 对齐,注意 diversity collapse 风险;本文中 DPO 的 distinct%@0.9 掉到 11.07,RPO 加辅助 SFT loss 能恢复,GRPO 则天然更稳。业务里偏好优化建议优先 GRPO 或 RPO,而不是裸 DPO。
- 把 serve-time best-of-N 的验证成本「一次性摊销进模型权重」可成为部署架构:训练时用 search engine 做 environment 在线 rollout,线上不再多次检索;对 latency 敏感、库存/广告供给受限的搜索推荐链路很有借鉴意义。